Gelenkhüü được sinh ra vào khoảng năm 1877 ở kỳ (khoshuu) Dalai Choinkhor của tỉnh Sain Noyon Khan. Ông được cho là một đứa trẻ sống động và tươi sáng. Dành vài năm làm người mới tu trong một tu viện địa phương, ông dường như đã phát triển những nỗ lực kỹ thuật và sáng tạo từ rất sớm. Sau khi bị trục xuất khỏi tu viện vì từ chối một số giáo lý tôn giáo, ông trở thành một người chăn gia súc.